Uncertainty-Aware Hybrid Retrieval for Long-Document RAG
面向长文档 RAG 的不确定性感知多粒度混合检索框架
🧭 检索增强生成 · 多粒度混合检索与不确定性估计 ★ 深度解读
Purdue University
提出无需训练的 UMG-RAG,利用检索得分分布的熵动态估计各检索源与粒度的置信度,并通过父块提升生成连贯的紧凑上下文。
📌 工作参考价值(4 点)
- 多路召回动态融合:借鉴基于熵的置信度估计,电商搜索/推荐的多路召回(如语义向量 + BM25)可以不再使用固定权重融合,而是根据查询的得分分布“锐度”自适应分配权重,提升不同类型 query 的召回质量。
- 细粒度定位 + 父块返回:在商品描述或用户评价的长文本检索中,可用句子级精准召回证据,再通过 parent promotion 返回段落级上下文,保持生成理由或答案的局部连贯性,同时用重叠去重避免冗余。
- 零训练即插即用:整个方法不修改现有检索器和生成器,只做检索后处理,可以极低成本集成到现有 RAG 管线中,适合快速验证和上线。
- 长度惩罚控制上下文体积:通过长度惩罚(除以 sqrt(token 数))在最终排序中倾向紧凑 chunk,能缓解大模型“lost-in-the-middle”问题,减少生成延迟和内存占用,对实时性要求高的推荐文案生成场景尤其有用。